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我 国 高 校 科研 人 员 Altmetrics 评价 需求 差异 研究 * 


和 沈 兰 妮 ” 韩 毅 
西南 大 学 计算 机 与 信息 科学 学 院 ”重庆 400715 


摘 要 : [目的 /意义 ] 随 着 Altmetrics 研究 日 益 深入 ,有 效 识别 Altmetrics 评价 的 利益 相关 方 需求 对 评价 指标 设计 及 数据 基 
础 设施 建设 具有 重要 意义 。[ 方法/ 过程] 以 高 校 科 研 人 员 为 对 象 , 利 用 半 结 构 访 谈 法 识别 我 国 高 校 科 研 人 员 的 
Altmetrics 评价 需求 ,采用 问卷 调查 法 获取 数据 并 检验 识别 出 高 校 科 研 人 员 Altmetrics 评价 需求 的 差异 性 。| 结果 / 
结论 ] 研究 发 现 ,我 国 高 校 科研 人 员 主 要 有 7 类 Altmetrics 评价 需求 ,分 别 是 :研究 评价 ,成 果 展 示 , 需 求 发 现 ,学 术 
认可 ,交流 传播 ,成 果 操 作 , 学 科 发 展 ;不 同年 龄 组 别 高 校 科 研 人 员 在 “研究 评价 ”方面 有 差异 ,51 -60 岁 ” 年 龄 组 
较 其 他 年 龄 组 在 “研究 评价 ”方面 的 需求 明显 偏 低 ; 除 “ 交 流传 播 ” 外 ,人 文学 科 的 6 个 Altmetrics 评价 功能 需求 强 
度 均 低 于 社会 学 科 和 自然 学 科 , 自然 科学 与 社会 科学 间 的 评价 需求 完全 一 致 ; 除 “ 研 究 评 价 ”功能 需求 在 教师 与 学 
生存 在 差异 外 ,6 个 Altmetrics 评价 需求 对 所 有 不 同 身份 类 别 高 校 科 学 人 员 没 有 差异 ;7 类 Altmetrics 评价 需求 对 高 


校 科 研 人 员 具 有 较 高 的 普遍 适用 性 。 
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ON 随 着 社交 媒体 技术 的 飞速 发 展 , 越 来 越 多 的 科学 
家 和 社会 公众 将 社交 媒体 作为 发 布 学 术 成 果 的 重要 渠 
遵 虑 , 非 正式 交流 越 来 越 成 为 学 术 生 态 系统 的 重要 组 
成 咒 分 。 伴 随 着 非 正式 交流 的 强劲 回归 ,学 术 成 果 的 
基 吏 形式 也 由 传统 的 期 刊 论文 .研究 报告 .专利 等 扩展 
到 祝 频 音频、PPT 等 形式 ,相应 的 评价 方式 也 应 随 着 
交流 形态 的 发 展 变化 而 迎 势 而 行 中 。 新 型 学 术 生 态 环 
境 下 ,为 学 术 成 果 开 发 科学 合理 的 学 术 影 响 力 及 社会 
影响 力 评价 方法 与 技术 已 成 为 目前 亟待 解决 的 问题 ， 
其 迫切 性 已 经 受到 社会 的 普遍 重视 ” ,2010 年 J. Priem 
针对 信息 交流 系统 新 变化 提出 Altmetrics 评价 正成 为 
问题 解决 的 选项 之 一 中 。 

科技 评价 的 核心 问题 是 用 定性 或 定量 方法 测度 科 
学 技术 过 程 及 结果 的 交流 效率 , 洲 选 出 对 交流 效率 最 
有 效 的 元 素 或 组 件 ,优化 和 重 构 交流 过 程 。 交 流 效率 
通常 采用 各 种 计量 指标 进行 衡量 ,反映 参与 交流 的 各 


利益 相关 方 对 交流 过 程 及 结果 的 迭代 博弈 认 知 ,是 科 
学 共同 体内 在 心理 动机 或 需求 的 一 种 外 在 反映 。Alt- 
metrics 作为 以 新 兴 自 媒体 为 代表 对 非 正式 交流 的 评价 
工具 已 经 诞生 近 10 年 ,各 利益 相关 方 对 其 的 了 解 也 日 
益 深 入 ,需要 进一步 厘清 的 问题 包括 所 开发 的 各 种 工 
具 是 否 有 效 反映 利益 相关 方 的 需求 满足 程度 有 多 高 、 
还 存在 哪些 问题 .数据 基础 设施 如 何 构建 等 。 本 文 聚 
焦 于 利益 相关 方 的 Altimetrics 评价 需求 ,以 我 国 大 陆 高 
校 科 研 人 员 为 样本 对 象 ,探索 其 评价 需求 及 在 不 同类 
别 上 表现 出 来 的 需求 差异 , 厌 此 检验 识别 出 的 评价 需 
求 的 真实 性 与 普遍 性 ,为 中 文学 术 成 果 Altmetrics 的 评 
价 方法 .技术 .工具 开发 提供 新 的 思路 。 


2 ”相关 文献 回顾 


Altmetrics 概念 提出 后 ,学 者 们 针对 Altmetrics 可 
能 应 用 展开 调研 ,主要 采用 访谈 、 问 卷 调 查 等 方式 从 
Altmetrics 认同 度 、Altmetrics 指标 、Altmetrics 工具 等 几 
个 维度 展开 。T. Malone 等 在 俄 殉 拉 荷 马 州 大 学 图 书馆 
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完成 果 之 一 。 
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员 中 发 起 了 一 项 在 线 调查 , 旨 在 了 解 大 学 图 书馆 员 对 
已 建立 和 正在 出 现 的 计量 学 指标 的 看 法 ,发 现 大 家 对 
Altmetrics 的 熟悉 程度 不 及 文献 计量 学 ,但 都 认为 Alt- 
metrics 是 有 效 的 ,有 兴趣 接受 相关 培训 并 为 评估 学 术 
影响 力 提供 服务 5 。K. Reed 等 通过 对 18 名 学 者 和 5 
名 研究 生 的 半 结 构 化 访谈 ,试图 评估 知识 库 和 学 术 界 
对 在 线 学 术 资 料 的 需求 ,包括 Altmetrics 工具 使 用 、 问 
题 和 态度 以 及 图 书馆 员 协 助 网 络 声誉 管理 所 扮演 的 角 
色 , 发 现 Altmetrics 评价 有 助 于 学 者 建立 自己 的 学 术 地 
位 ,图 书馆 员 可 为 此 提供 个 性 化 支持 。K. Holmberg 
等 采用 问卷 方式 调查 芬兰 研究 人 员 受 到 在 线 关注 的 原 
因 以 及 受到 的 关注 是 否 可 反映 其 研究 的 科学 或 社会 影 
响 ,调查 时 向 参与 者 展示 两 个 数据 源 中 其 研究 论文 的 
Alpmetrics 指标 ,研究 发 现在 线 关注 是 否 可 反映 科学 或 
社会 影响 尚 无 明确 共识 ,但 普遍 认为 在 线 关注 可 产生 
税 概 的 科学 和 社会 影响 7) 。K. H. Chen 等 以 社会 科学 
入 文 科学 为 例 , 利 用 主 成 分 分 析 、 回 归 分 析 等 方法 对 
183$ Altmetrics 指标 数据 进行 分 析 , 发 现 社会 科学 家 
通 溃 能 够 在 学 术 周 期 之 外 发 挥 其 影响 力 ,建议 创建 相 


了 昌 标 反映 这 方面 的 效果 与 需求 1。R. K. Bhardwaj 
收 抽 了 图 书馆 和 信息 科学 领域 专家 经 常 使 用 的 四 个 
ASNS: ( Academic Social Networking Sites ) 网 站 ( 即 Re- 
ANhcate ,Academia. edu,Mendeley 和 Zotero ) 数据 , 基 
于 总 类 指标 对 4 个 网 站 进行 比较 分 析 , 发 现 图 书 情报 
命 哆 人员 可 利用 这 些 网 站 的 Altmehics 评价 功能 帮助 
学 水 共同 体 优化 研发 活动 ”。 这 些 调研 一 方面 反映 了 
大 但 对 于 Altmetrics 应 用 的 疑虑 ,但 也 认同 其 作为 新 兴 
计 故 工具 的 可 能 价值 ,采取 开放 态度 面 对 其 未 来 发 展 。 

针对 Altmetrics 的 应 用 实践 主要 集中 在 研究 评价 
(晋升 .评奖 学 金 . 提 高 学 术 声誉 ) .研究 发 现 (前 沿 . 热 
点 ) .成 果 展 示 ( 学 术 影响 力 ) .交流 传播 (分 享 ) 等 方 
面 。R. Kwok 在 晋 职 时 为 了 说 明 其 科研 成 果 的 影响 力 ， 
除 列举 期 刊 影响 因子 和 论文 引用 数 外 ,还 使 用 工具 Im- 
pactStory 生成 Altmetrics 影响 力 报告 ,该 形式 得 到 了 评 
议 同行 的 赞许 '” ;H. Bik 在 向 Phinch 基金 会 汇报 项 目 
成 果 时 , 除 列举 期 刊 论文 外 ,还 列举 诸如 海报 和 讨论 等 
的 浏览 数 .软件 产品 下 载 量 统计 数 等 Altmetrics 评价 指 
标 ,该 方式 获得 了 项 目 评审 专家 的 普遍 认同 。FE. 
Mojisolae 等 以 Kudos 平台 为 对 象 的 案例 研究 表明 , 随 
着 学 术 合作 网 络 和 社交 通信 平台 的 发 展 ,科学 共同 体 
正在 试验 新 的 交流 方式 以 增加 研究 成 果 的 受众 面 ,新 
交流 模式 可 在 一 定 程度 上 增加 出 版 物 的 全 文 下 载 次 
数 '"” 。D. Nicholas 等 深度 访谈 早期 职业 研究 人 员 


Tc 
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(Early Career Researchers ,ECR ) 如 何在 新 的 学 术 交 流 
环境 中 获得 学 术 声 誉 ,结果 发 现 研 究 人 员 更 注意 传统 
学 术 声 誉 形成 方式 ( 即 期 刊 论文 主导 的 引用 ) ,尽管 诸 
如 ResearchGate 等 新 型 学 术 社 区 对 ECR 的 可 见 度 和 引 
日 率 在 不 断 提 升 ,但 他 们 对 之 的 兴趣 较 小 ,作者 认为 以 
Altmetrics 为 代表 的 新 型 度量 方式 是 大 家 应 当 接 受 的 
“游戏 规则 ”“” 。 因 此 ,尽管 少数 敏锐 的 研究 者 已 经 注 
意 到 Altmetrics 评价 的 重要 价值 与 意义 ,但 Altmetrics 
评价 为 学 术 共 同体 整体 接受 与 使 用 还 有 一 段 距离 。 
下 对 广泛 使 用 的 新 兴 分 析 平 台 (Scopus, Web of 
Science ,PubMed 和 Google Scholar ) ,G. A. Yuri 等 认为 
不 仅 可 以 为 学 者 们 提供 学 术 分 享 的 功能 ,还 可 以 帮助 
研究 经 理 和 期 刊 编辑 选择 最 佳 评 论 者 和 学 术 贡 献 者 ， 
研究 人 员 的 影响 力 将 伴随 着 平台 开放 性 的 提高 而 提 
高 ” 。 徐 曼 指出 ,出 版 社 可 以 从 海量 的 在 线 数 据 ( 如 
图 书 门户 网 站 社交 平台 .运营 平台 上 用 户 消费 行为 数 
据 和 圈子 数据 等 ) 分 析出 不 同 读者 群体 的 需求 和 喜好 ， 
不 仅 通过 提供 个 性 化 服务 来 增加 用 户 黏 性 ,还 可 二 次 
分 析 数 字 资 源 的 行为 记录 (如 浏览 足迹 、 订 单 信息 )、 
意愿 偏好 (如 点 赞 、 评 论 ) 等 ,真正 做 到 “以 最 小 化 的 营 
销 成 本 获得 最 大 化 的 营销 效果 ”” 。 杜 秀 杰 等 指出 ， 
数字 出 版 过 程 中 读者 可 以 将 自己 对 学 术 论文 最 真实 的 
感受 表达 出 来 ,因此 建立 科学 的 读者 反馈 系统 ,将 读者 
意见 纳入 期 刊 界 ,学术 界 对 论文 的 评价 中 ,可 以 真正 确 
立 读者 在 信息 传播 中 的 主体 地 位 ,而 且 作 者 通过 了 解 
读者 对 其 学 术 研 究 的 评价 ,还 可 以 从 中 捕捉 科学 的 灵 
感 和 火花 , 嗅 出 学 术 研 究 的 前 沿 和 热点 ”。 所 以 , 数 
字 出 版 不 仅 是 出 版 问题 ,更 是 以 出 版 物 为 核心 关联 相 
关 利 益 方 的 中 介 , 如 何 识别 出 其 中 的 关键 因素 , Altmet- 
rics 评价 具有 重要 的 实时 价值 。 

总 体 来 说 ,Altmetrics 评价 研究 不 仅 涉及 相应 的 数 
据 基础 设施 .工具 \ 方 法 和 理论 ,还 关乎 各 类 利益 相关 
方 对 评价 结果 的 采信 和 与 使 用 ,目前 关于 后 者 的 研究 相 
对 较 少 。 美 国 国家 标准 组 织 NISO 在 分 析 8 类 主要 使 
用 群体 功能 的 基础 上 总 结 出 Altmetrics 在 成 果 显 示 、 研 
究 评估 和 发 现 方面 的 需求 ” ; 韩 狼 团队 在 非 正 式 交 流 
回归 视角 下 从 生产 .中 介 使 用 3 个 维度 提取 Altmetrics 
的 11 类 利益 相关 方 并 归纳 出 研究 水 平 . 成 果 展 示 、 需 
求 发 现 3 方面 的 评价 需求 ” 。 为 了 使 Altmetrics 评价 
具有 广泛 的 使 用 场 域 , 需 要 深刻 理解 与 掌握 相关 利益 
方 对 Altmetrics 评价 的 需求 功能 ,鉴于 Altmetrics 使 用 
群体 的 复杂 性 ,本 文选 取 我 国 高 校 科 研 人 员 为 对 象 探 
索 Altmetrics 评价 需求 差异 特征 , 藉 此 寻找 Altmetrics 
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评价 需求 的 共性 。 
3 对象 数 据 与 方法 


尽管 在 高 校 中 大 家 默认 的 科研 人 员 主 要 是 教师 与 
专职 研究 人 员 ,但 实践 中 硕士 生 博士 生 甚至 部 分 本 科 
生 也 参与 到 科学 研究 中 ,因此 本 文 的 科研 人 员 作 泛 化 
处 理 。 考 虑 到 了 本 科 生 参与 科研 过 程 的 非 普遍 性 及 专 
职 研究 人 员 也 从 事 教学 工作 ,本 文 的 高 校 科 研 人 员 范 
晓 主 要 限定 在 研究 生 及 教师 。 

为 了 有 效 识别 出 我 国 高 校 科 研 人 员 的 Altmetrics 
评价 需求 ,本 文选 择 典 型 个 案 进 行 深度 访谈 ,通过 对 访 
谈 结 果 的 扎根 编码 识别 出 高 校 科 研 人 员 Altmetrics 评 
价 的 初始 需求 ,结合 相关 研究 结果 精炼 出 高 校 科研 人 


到 Altmetrics 评价 需求 。 
1 中 为 了 证 实 识别 出 来 的 高 校 科 研 人 员 Altmetrics 评 
俐 齐 求 的 有 效 性 ,以 识别 结果 为 基础 编制 调查 问卷 , 通 


上 


因子 邮件 .QQ 及 微 信 .学校 公共 区 域 随机 发 放 等 方 
式 R 取 调查 数据 ,以 年 龄 .学 科 门 类 和 身份 为 分 组 变量 
个 竺 我国 高 校 科研 人 员 Almetrics 评价 需求 的 差异 特 
徒 革 如 果 不 同类 别 高 校 科研 人 员 对 识别 出 的 Altmet- 
6 人 评价 需求 没有 显著 差异 性 , 则 表明 这 些 评价 需求 
其 旧 人 高 的 普遍 性 及 现实 可 用 性 ;如 果 有 显著 差异 性 ， 
则 过 明 这 些 评价 需求 的 实践 过 程 需要 区 别 对 待 。 


ee 
4. 宾 高 校 科 研 人 员 的 Altmetrics 评价 需求 识别 
4 访谈 对 象 选择 


昌 为 使 访谈 样本 具有 代表 性 ,本 文采 用 半 结 构 化 访 
谈 10 位 有 过 发 文 经 历 的 西南 大 学 在 校 科研 人 员 ( 其 中 
2 名 受 访 者 数据 用 于 饱和 度 检验 ) ,具体 信息 见 表 1, 访 
谈 时 间 为 2018 年 10 月 。 对 10 个 样本 采用 “一 对 一 ” 
访谈 ,在 访谈 对 象 同意 的 情况 下 进行 录音 ,将 其 音频 数 
据 转化 为 文字 资料 进行 后 续 分 析 。 

表 1 访谈 对 象 基本 信息 


序号 姓名 性 别 专业 在 校 身份 
1 HY 女 基础 心理 学 硕士 研究 生 
2 Why 女 眼 视 光 技术 博士 研究 生 
3 Yy 女 美术 理论 硕士 研究 生 
4 Wegh 男 软件 工程 博士 研究 生 
5 Lie 女 信息 与 通信 工程 ”博士 研究 生 
6 Xcc 女 情报 学 硕士 研究 生 
7 Hy 凡 情报 学 教授 
8 Hcl 女 马克 思 主 义 哲 学 讲师 
9 Ll 内 计算 机 应 讲师 
10 Zxy 女 汉语 言 文学 副教授 


4.1.2 访谈 提纲 设计 

基于 已 有 的 相关 研究 成 果 , 在 访谈 前 设计 了 访谈 提 

纲 ( 见 表 2) ,主要 包括 :基本 信息 、Altmetrics 评价 需求 。 
表 2 访谈 提纲 


访谈 主题 主要 内 容 
基本 信息 性别、 年 龄 .所 属 学 科 门 类 


评价 需求 1 您 会 在 论文 发 表 后 关注 人 们 对 于 研究 成 果 的 一 些 反 馈 信 


2 您 觉得 哪些 信息 可 以 表明 您 的 研究 成 果 有 广泛 的 影响 力 
或 者 受到 别人 的 认可 ? 

3 研究 成 果 有 了 影响 力 或 受到 认可 ,这 种 结果 对 于 您 有 什么 
帮助 ? 


4 您 通过 哪 种 方式 参与 过 网 络 中 的 学 术 信 息 交流 活动 ? 
5 您 觉得 促进 您 参加 网 络 学 术 交 流 活动 的 原因 或 动机 是 什么 ? 
6 网 络 环境 下 的 评价 反馈 (评论 ,转载 等 ) 带 给 您 的 好 处 有 哪些 ? 


4.1.3 扎根 编码 过 程 及 结果 

扎根 理论 是 根据 调查 资料 进行 经 验 概括 ,提炼 研 
究 现象 概念 ,是 一 种 自 下 而 上 的 归纳 式 研究 方法 局 ， 
但 它 的 主要 特点 不 是 经 验 性 ,而 在 于 它 从 经 验资 料 中 
抽象 出 新 的 概念 和 观点 。 

(1) 开 放 编码 。 开 放 编 码 是 对 转化 的 文本 资料 进 
行 逐 词 逐 句 的 分 析 并 概念 化 的 过 程 , 即 对 搜集 的 资料 
进行 分 解 ,针对 资料 里 所 反映 的 现象 ,不 断 比较 其 间 的 
异同 ,进而 为 现象 赋予 概念 标签 ,再 把 相似 概念 聚 类 提 
炼 出 更 高 一 级 的 概念 一 一 范畴 ,从 而 实现 资料 的 概念 
化 .范畴 化 。 

针对 搜集 到 的 材料 共 形 成 21 个 开放 式 编码 :影响 
力 参与 度 . 展 示 自 我 .评估 科研 实力 .申请 项 目 . 申 请 
经 费 .申请 奖学金 .学 业 深 造 .评定 职称 .学 业 要 求 、 找 
工作 .热点 追寻 ,交流 合作 、 学 术 认 可 (他 人 /自我 ) 自 
我 锻炼 、 分 享 .抢占 学 术 优先 权 ,学 术 成 果 保护 .成果 商 
业 化 .学 科 发 展 ,解疑 答 惑 ,如 表 3 所 示 ( 部 分 ) : 

表 3 开放 编码 结果 示例 (部 分 ) 

原始 语句 及 编码 
LL: 有 一 定 质量 的 发 文 ,对 于 职业 晋升 .招生 等 都 是 有 一 定 影 响 的 (评估 科 


研 实 力 ) 
Why :我 们 专业 成 果 发 表 后 ,首先 是 被 引 量 然后 是 下 载 量 ,还 有 就 是 实践 效 
果 比 较 好 ,因为 这 个 领域 (医学 ) 不 可 能 是 别人 说 好 就 是 好 ,肯定 是 有 临床 
效果 比较 好 (影响 力 ,学 术 认 可 ) 
Xec :就 是 一 边 了 解 我 们 自己 领域 的 一 个 最 新 动态 ,方便 自己 的 研究 (热点 
追寻 ) 
HY :我 觉得 (能 发 文章 ) 还 能 继续 往 上 读 ,到 现在 还 没有 被 认可 的 文章 ,就 
是 往 上 读 的 可 能 性 有 点 少 了 (学 术 认 矶 
HY: 有 些 实验 室 细节 ,就 是 没 搞 懂 ,可 以 私 聊 一 下 他 ,或 者 是 跟 他 要 一 下 他 
的 实验 程序 啊 什 么 都 可 以 (交流 合作 ) 
Lje: 评 价 高 的 文章 会 有 那些 企业 会 来 跟 你 联系 ,就 说 你 做 的 这 个 成 果 我 能 
不 能 把 它 商业 化 ,然后 如 果 可 以 商业 化 的 话 , 我 们 再 讨论 一 下 (成 果 商 业 


— 


Hhl :我 们 专业 本 来 研究 的 人 很 少 ,这 个 文章 得 到 了 较 早 的 反馈 的 话 , 那 大 
家 就 做 相同 方向 的 ,就 会 促进 这 个 学 科 的 发 展 ( 抢 占 学 术 优先 权 ) 
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(2) 主轴 和 选择 编码 。 主 轴 编 码 是 在 开放 式 编 码 
基础 上 进行 再 次 编码 ,通常 对 具有 内 在 联系 的 概念 进 
行 聚 类 ,目的 是 使 范畴 更 加 紧密 ;选择 编码 是 针对 开放 
编码 .主轴 编码 结果 发 展 具有 “中 央 性 ”核心 类 属 概 
念 ,形成 概念 体系 内 在 的 稳固 的 联系 结构 。 


通过 以 上 两 个 过 程 ,最 终归 纳 为 7 个 子 范畴 (研究 
评价 ,成 果 展 示 , 需 求 发 现 ,学 术 认 可 ,交流 传播 ,成 果 
操作 ,学 科 发 展 ) ,将 其 聚焦 为 Altmetrics 评价 需求 , 结 
果 如 表 4 所 示 : 


表 4 主轴 及 选择 编码 


核心 范畴 子 范 因 子 范畴 内 洱 包含 的 下 一 级 子 范畴 
Almetrics 评价 需求 研究 评价 。 研究 成 果 的 影响 力 评估 与 识别 评估 科研 实力 ,申请 项 目 ,申请 经 费 ,申请 奖学金 ,学 业 
深造 ,评定 职称 ,学 业 要 求 , 找 工作 

成 果 展示 研究 成 果 的 呈现 形式 及 展示 平台 影响 力 ,参与 度 ,展示 自我 
需求 发 现 识别 研究 热点 .合作 者 竺 热点 追寻 ,交流 合作 
学 术 认可 研究 成 果 的 学 术 价 值 认同 ( 包括 自我 认可 和 他 人 认可 ) 学 术 认可 ,自我 狠 炼 
交流 传播 。 研究 成 果 的 交流 扩散 程度 及 方式 分 享 ,抢占 学 术 优 先 权 
成 果 操作 研究 成 果 的 实践 效果 和 可 操作 性 成 果 商 业 化 ,学 术 成 果 保护 
学 科 发 展 “研究 成 果 对 学 科 发 展 的 促进 作用 学 科 发 展 ,解疑 管 惑 

> 

LO 对 2 名 用 于 饱和 度 检 验 的 受 访 者 数据 进行 编码 ， | 4.2 高 校 科 研 人 员 的 Altmetrics 评价 需求 差异 


浅 注 发 现 新 的 结果 ,因而 在 一 定 程度 上 表明 上 述 高 校 

种 带 人 员 Altmetrics 评价 需求 的 编码 结果 具有 和 较 高 的 

代 如 性, 可 以 用 于 进一步 的 后 续 分 析 。 
< 十 


表 :> 


4.2.1 问卷 设计 及 数据 搜集 
根据 编码 结果 及 个 案 访谈 材料 编制 高 校 科研 人 员 
Altmetrics 评价 需求 调研 的 初始 问卷 ,如 表 5 所 示 : 


调查 问卷 ( 部 分 ) 


> 一 = 


CD 类 别 选项 
本 信息 1 性别 口 男 口 女 
© 2 .年 龄 ( 岁 ) 
CN 30 及 以 下 口 31 ~40 D41 ~50 口 51 ~60 口 61 及 以 上 
EE 3 .您 目前 在 校 担任 的 角色 
之 硕 十 研究生 口 博士 研究 生 初级 ( 口 助教 ) 中 级 ( 口 讲师 程 师 ) 副 高 级 ( 口 副教授 “ 口 副 研究 员 
> 高 级 实验 师 ) 正高 级 ( 口 教授 口 研究 员 ) 
晤 4 .您 所 取得 最 高 学 位 所 属 学 科 分 类 

哲学 口 经 济 学 口 法 学 口 教育 学 口 文 学 口 历史 学 口 理学 学 口 农 学 口 医学 口 军事 学 
到 要 通过 哪 种 方式 参与 过 网 络 中 的 学 口 参与 过 评论 口 收藏 口 F 载 口 转发 口 推送 口 私 聊 口 发 表 朋友 圈 口 点 赞 过 口 解答 过 别人 的 问题 
东信 息 交流 活动 ? (可 多 选 ) 发 布 帖子 “ 口 关注 口 浏览 口 引用 口 保有 他 

题 项 (科研 评价 ) 完全 不 符合 。 比较 不 符合 ” 一 般 比较 符合 。 完全 符合 
3 投递 或 发 表 研究 成 果 后 有 了 影响 力 ”评定 职称 
或 受到 认可 ,这 种 结果 对 于 您 最 大 的 帮 。 申请 项 目 
助 是 申请 经 费 

申请 评奖 学 金 

获得 毕业 资格 

申请 科研 奖励 

其 他 


正式 调研 前 开展 预 调研 工作 ,主要 通过 电子 邮件 、 
QQ 及 微 信 、 学 校 公共 区 域 随机 发 放 等 方式 发 放 , 共 获 
取 76 份 预 调研 数据 ,以 该 数据 为 基础 进行 项 目 分 析 、 
CITC 检验 与 信和 度 检验 来 进一步 净化 调研 问卷 。 

通过 项 目 分析 发 现 : 预 调研 问卷 前 25% 和 后 25% 
的 得 分 节点 分 别 为 302 和 250, 将 得 分 大 于 302 的 视 
为 高 分 组 , 低 于 250 的 视 为 低 分 组 ,将 高 低 分 组 进行 
独立 样本 T 检 验 ( 见 表 6) ,根据 每 一 题 项 的 CR 值 是 


否 达 到 显著 水 平 进行 题 项 鉴别 ,最 终 有 52 个 题 项 通 

依据 预 调研 的 其 他 反馈 (如 语言 文字 表达 ) 及 题 
项 鉴别 结果 编制 正式 调查 问卷 ,通过 电子 邮件 .QQ 及 
微 信 、 学 校 公 共 区 域 等 方式 共 收 集 正 式 调查 问卷 424 
份 , 以 “Cronbach a” 值 为 判断 量 表 一 致 性 的 标准 ( 见 表 
7) ,信和 度 系数 为 0.971( 大 于 0.8) ,说 明 数据 可 靠 性 比 
较 高 ,适合 做 后 续 相 关 分 析 。 
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表 6 高 低 组 得 分 独立 样本 T 检验 ( 部 分 ) 


方差 方程 的 Levene 检验 均值 方程 的 t 检验 
差分 的 95% 置信 区 间 
F Sig. t df Sig. ( 双 侧 ) ”均值 差 值 ”标准 误差 值 
下 限 上 限 
VAROOO1 假设 方差 相等 2.174 .150 5.984 34 .000 1. 833 .306 1.211 2.456 
假设 方差 不 相等 5.984 31.457 .000 1. 833 .306 1.209 2.458 
VARO002 假设 方差 相等 .003 .955 3.625 34 .001 1.222 .337 .537 1.907 
假设 方差 不 相等 3. 625 33.911 .001 222 .337 .537 1.907 
VARO003 假设 方差 相等 .024 .878 3.203 34 .003 1.222 .382 .447 1.998 
假设 方差 不 相等 3.203 33. 879 .003 1.222 .382 .447 1.998 
VARO004 假设 方差 相等 1.016 .321 TSI 34 .000 2.389 .318 1.743 3.035 
假设 方差 不 相等 7.512 33. 866 .000 2.389 .318 1.743 3. 035 
表 7 量 表 可 靠 性 检验 表 8 描述 统计 结果 
Cronbach s Alpha 项 数 背景 变量 类 别 ( 频率 或 占 比 ) 
D .971 52 性 别 男 (177) 女 (247) 


ST 
tai 言 息 ( 见 表 8) 来 看 ,男女 的 比例 为 
% 和 58.3% ,学 生 约 占 75% ,在 13 个 学 科 门 类 
ee 
徊 3 入 部 分 学 科 样 本 较 少 甚至 没有 ( 如 :医学 .军事 


学 

沪 不 同年 龄 组 高 校 科 研 人 员 的 Altmetrics 评价 
5 
QN 以 “年 龄 ”为 分 组 因子 ,以 “研究 评价 ”" “成 果 展 
Ty 需求 发 现 ”“ 学 术 认 可 "”“ 交 流传 播 ”“ 成 果 操 作 ” 


年 龄 ( 岁 ) ”30 及 以 下 (316) 31 ~40(77) 41 ~50(20) 51 ~60(11) 61 
及 以 上 (0) 
在 校 身份 ” 研究 生 (317) 教师 /研究 员 等 (107) 
学 科 哲学 (6) 经 济 学 (13) 法 学 (19 ) 教 育 学 (35 ) 文 学 (22 ) 工学 


(71)… 农 学 (16) 

主题 (%) ”评论 量 93.4 推荐 94.8 转发 量 93. 5 提 及 量 93.3 引用 量 92. 
1 评论 量 91.45 私信 90.8 
链接 数量 90.7 下 载 量 88. 85 点 赞 量 88. 8 阅读 量 82. 8 保存 
量 75 收藏 量 78.9 发 布 帖子 90.8 


“学 科 发 展 ”7 个 评价 需求 为 因 变 量 进 行 单 因子 多 变量 
的 方差 分 析 ,结果 如 表 9 所 示 


© 表 9 不同 年龄 的 多 变量 检验 
效应 值 F 假设 df 误差 df Sig. 偏 Eta 方 
= 
i Pillai 的 跟踪 .889 475.208a 7.000 414. 000 .000 .889 
© Wilks 的 Lambda .111 475.208a 7.000 414. 000 .000 .889 
Hotelling 的 跟踪 8. 035 475.208。 7.000 414. 000 .000 .889 
Roy 的 最 大 根 8. 035 475.208a 7.000 414.000 .000 .889 
年 龄 Pillai 的 跟踪 .239 5.141 21. 000 1 248. 000 .000 .080 
Wilks 的 Lambda 2771 5.368 21. 000 1 189.335 .000 .083 
Hotelling 的 跟踪 .284 5.586 21. 000 1 238. 000 .000 .087 
Roy 的 最 大 根 .233 13. 825? 7.000 416. 000 .000 .189 


注 :a. 精确 统计 量 ; b. 该 统计 量 
由 表 9 可 见 ,Pillai V 值 为 0.239,Wilks 值 为 0.771， 
多 变量 显著 性 检验 量 (Hotelling Trace 值 ) 为 0. 284 ,Roy 
最 大 平方 根 统计 量 为 0.233 ,其 中 p 值 ( =0.000) 均 小 
于 0.05 ,达到 显著 水 平 。 2 个 变量 
的 差异 比较 中 ,至 少 有 一 个 变量 的 平均 数 有 显著 差异 ， 


需要 进一步 进 ee 方差 分 析 , 结果 见 表 
10。 


是 F 的 上 限 , 它 产生 了 一 


由 表 10 可 知 ,不 同年 龄 组 高 校 科研 人 员 在 7 个 变 


个 关于 显著 性 级 别 的 下 限 ;c. 设计 : 截 距 + 年 龄 


量 上 的 单 变量 方差 分 析 值 分 别 14.334(p=0.000 < 
0.05) .1.024(p =0.382 >0.05) .0.325(p =0.807 > 
0.05) 1.085(p = 0.355 > 0.05) .1.249(p =0.292 > 
0.05) .0.879(p = 0. 452 > 0. 05 ) .0. 999(p = 0. 393 > 
0. 05 ) ,表明 不 同年 龄 组 在 “人 研究 评价 ”需求 上 有 差异 ， 
多 变量 差异 达到 显著 主要 由 “研究 评价 ”变量 引起 的 。 
对 数据 进行 Post Hoc 多 重 比较 检验 ,结果 见 表 11。 
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表 10 不 同年 龄 的 主体 间 效 应 检验 


源 因 变 量 II 型 平方 和 df 均 方 F Sig. 偏 Eta 方 
校正 模型 研究 评价 1 587. 444a 3 529. 148 14.334 .000 .093 
成 果 展 示 1 820. 788? 3 606. 929 1.024 382 .007 
需求 发 现 8.585° 3 2. 862 .325 .807 .002 
学 术 认 可 149.0524 3 49. 684 1.085 .355 .008 
交流 传播 89.797* 3 29. 932 1.249 .292 .009 
成 果 操 作 74.713f 3 24.904 .879 .452 .006 
学 科 发 展 15. 9488 3 5.316 .999 .393 .007 
截 距 研究 评价 66 437. 846 1 66 437. 846 1 799. 678 .000 .811 
成 果 展 示 1 746 818.230 1 1 746 818.230 2 946. 291 .000 .875 
需求 发 现 20 360. 874 1 20 360. 874 2 311.458 .000 . 846 
学 术 认 可 127 766. 099 1 127 766. 099 2 789. 942 .000 .869 
交流 传播 67 464. 648 1 67 464. 648 2 814.960 .000 .870 
成 果 操 作 58 529. 056 1 58 529. 056 2 065. 937 .000 .831 
学 科 发 展 12 615. 816 1 12 615. 816 2 371. 653 .000 .850 
> 年 龄 研究 评价 1 587. 444 3 529. 148 14.334 .000 .093 
Ss 成 果 展 示 1 820. 788 3 606. 929 1.024 .382 .007 
© 需求 发 现 8.585 3 2. 862 .325 . 807 .002 
© 学 术 认 可 149. 052 3 49. 684 1.085 355 .008 
OO 交流 传播 89.797 3 29. 932 1.249 .292 .009 
< 十 成 果 操作 74.713 3 24. 904 . 879 .452 .006 
人 学 科 发 展 15.948 3 5.316 999 393 007 


CGC\ 夺 :a R 方 =.093( 调 整 R 方 =.086); b. R 方 =.007( 调 整 R 方 =.000);c. R 方 =.002( 调 整 R 方 = -.005); d. R 方 =.008( 调 整 R 
oa e. R 方 =.009( 调 整 R 方 =.002);f. R 方 =.006( 调 整 R 方 = -.001); g. R 方 =.007( 调 整 R 方 =.000) 


4 95% 置信 区 间 
人 ee 办 变量 (D 年 龄 (J) 年 龄 。 ”均值 差 值 (1-J) ”标准 误差 Sig. 
© 下 限 上 限 
Ei 完 评价 30 及 以 下 31 ~40 1.30 772 .417 =y87 3.47 
No 41 ~50 2.95 1.401 .221 一 .99 6.88 
人 51 ~60 11.59* 1.864 .000 6.36 16. 82 
OO 31 ~40 30 及 以 下 -1.30 772 .417 -3.47 .87 
41 ~50 1.64 1. 525 .762 -2.64 5.92 
51 ~60 10.29* 1.958 .000 4.79 15.78 
41 ~50 30 及 以 下 -2.95 1.401 :22 一 6.88 .99 
31 ~40 —1.64 1. 525 .762 一 5.92 2.64 
51 ~60 8.64* 2.281 .003 2.24 15.04 
51 ~60 30 及 以 下 一 11.59* 1.864 .000 —16.82 -6.36 
31 ~40 —10.29* 1.958 .000 —15.78 -4.79 
41 ~50 -8.64* 2.281 .003 —15.04 一 2.24 
成 果 展 示 30 及 以 下 31 ~40 2.66 3.095 .863 -6.02 11.35 
41 ~50 4.69 5.614 .873 -11.07 20. 45 
51 ~60 10.62 7.468 .568 —10.34 31.59 
31 ~40 30 及 以 下 -2.66 3.095 .863 -11.35 6.02 
41 ~50 2.03 6.111 .991 -15. 12 19.18 
51 ~60 7.96 7.848 .794 -14.07 29.99 
41 ~50 30 及 以 下 一 4.69 5.614 .873 —20.45 11.07 
31 ~40 —2.03 6.111 .991 —19.18 15. 12 
51 ~60 5.93 9. 140 .936 —19.72 31.59 
51 ~60 30 及 以 下 -10.62 7.468 .568 -31.59 10.34 
31 ~40 -7.96 7.848 .794 一 29. 99 14.07 
41 ~50 -5.93 9. 140 .936 -31.59 19.72 
需求 发 现 30 及 以 下 31 ~40 —.36 :377 .821 -1.42 .70 
41 ~50 .08 .684 1.000 —1.84 2.00 
51 ~60 一 .15 .910 .999 = 2.40 
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( 续 表 11) 
95% 置信 区 间 
Scheffe 因 变 量 (了 年 龄 (J) 年 龄 均值 差 值 (1 -了 ) 标准 误差 Sig. 
下 限 上 限 
31 ~40 30 及 以 下 .36 .377 .821 -.70 1.42 
41 ~50 .44 .745 .951 —1.65 3 
51 ~60 .21 .957 .997 -2.48 2. 89 
41 ~50 30 及 以 下 —.08 .684 1.000 -2.00 1.84 
31 ~40 一 .44 745 .951 —2.53 1.65 
51 ~60 一 .23 1.114 .998 -3.36 2.90 
51 ~60 30 及 以 下 .15 .910 .999 -2.40 .71 
31 ~40 = .957 .997 —2.89 2.48 
41 ~50 ,23 1.114 .998 -2.90 3.36 
学 术 认 可 30 及 以 下 31 ~40 .48 .860 .958 一 1.94 2.89 
41 ~50 1.29 1.560 .878 -3.09 5.67 
51 ~60 3.32 2.076 .465 .50 9.15 
31 ~40 30 及 以 下 一 .48 .860 .958 —2.89 1.94 
41 ~50 .81 1.698 .973 -3.96 5.57 
51 ~60 2.84 2.181 .637 -3.28 8.97 
41 ~50 30 及 以 下 -1.29 1.560 .878 -5.67 3.09 
TT 31 ~40 —.81 1.698 .973 -5.57 3.96 
> 51 ~60 2.04 2. 540 .887 -5.09 9.17 
LO 51 ~60 30 及 以 下 -3.32 2.076 .465 -9.15 2.50 
CN 31 ~40 —2.84 2.181 .637 -8.97 3.28 
© 41 ~50 —2.04 2.540 .887 -9.17 5.09 
Oss 30 及 以 下 31 ~40 -1.18 622 .307 —2.93 .56 
©O 41 ~50 .05 1.129 1.000 = 分 各 3.22 
< 51 ~60 -.61 1.502 .983 —4.83 3.60 
© 31 ~40 30 及 以 下 1.18 .622 .307 一 .56 2.93 
CD 41 ~50 1.23 1.229 .801 = 4.68 
AAA 51 ~60 .57 1.578 .988 -3.86 5.00 
© 41 ~50 30 及 以 下 —.05 1.129 1.000 =3:22 3.12 
AN 31 ~40 —1.23 1.229 . 801 —4.68 pp 
0 51 ~60 一 .66 1.838 .988 -5.82 4.50 
> 51 ~60 30 及 以 下 .61 1.502 .983 -3.60 4.83 
ee 31 ~40 一 .57 1.578 .988 -5.00 3.86 
>< 41 ~50 .66 1.838 .988 -4.50 5.82 
《起 果 操作 30 及 以 下 31 ~40 1.08 676 .467 —.82 2.98 
CC 41 ~50 :37 1.227 .975 —2.88 4.01 
51 ~60 .14 1. 633 1. 000 -4.44 4.73 
全 31 ~40 30 及 以 下 —1.08 .676 .467 —2.98 .82 
© 41 ~50 = 1.336 .986 -4.26 3.24 
51 ~60 一 .94 1.716 .961 三 和 .75 3.88 
41 ~50 30 及 以 下 一 .57 i227 .975 —4.01 2.88 
31 ~40 .51 1.336 .986 -3.24 4.26 
51 ~60 一 .42 1.998 .998 一 6.03 5.19 
51 ~60 30 及 以 下 = 本 1.633 1.000 一 4.73 4.44 
31 ~40 .94 1.716 .961 —3.88 S573 
41 ~50 .42 1.998 .998 -5.19 6.03 
学 科 发 展 30 及 以 下 31 ~40 —.31 293 .774 —1.13 51 
41 ~50 7 .532 .555 -2.26 ep 
51 ~60 —.31 .707 .979 -2.29 1.68 
31 ~40 30 及 以 下 .31 .293 :7 三 5 1.13 
41 ~50 一 .46 .579 .890 —2.08 1.17 
51 ~60 .00 .743 1.000 —2.09 2.09 
41 ~50 30 及 以 下 .77 .532 .555 Ep) 2.26 
31 ~40 . 46 .579 .890 -1.17 2.08 
51 ~60 .46 .866 .963 -1.97 2.89 
51 ~60 30 及 以 下 .31 .707 .979 —1.68 2.29 
31 ~40 .00 .743 1.000 —2.09 2.09 
41 ~50 一 .46 .866 .963 —2.89 1.97 


注 :基于 观测 到 的 均值 。 误差 项 为 均值 方 (错误 ) = 5.319; *. 均值 差 值 在 .05 级 别 上 较 显 著 
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表 11 为 单 变量 Scheffe 法 的 比较 结果 。 由 表 中 数 
据 可 知 ,在 “研究 评价 ”变量 方面 ,三 个 水 平 组 别 的 伴 
随 概 率 值 小 于 0.05 ,达到 显著 水 平 , 且 "51 -60 岁 ” 组 
显著 低 于 “30 岁 及 以 下 组 ,31 ~40 岁 组 以 及 和 ~50 岁 


上 述 研究 数据 表明 , 除 “ 研 究 评 价 ” 需 求 在 使 用 中 
要 特别 注意 “51 -60 岁 ” 年 龄 组 外 ,依据 这 些 Altmetrics 
评价 需求 设计 的 评价 指标 在 所 有 年 龄 组 均 具 有 一 致 的 
评价 效率 ,日 “51 - 60 岁 ” 年 龄 组 的 数据 值 最 低 ,因而 


组 ”, 在 “成 果 展 示 ” “需求 发 现 ”“ 学 术 认 可 ”“ 交 流传 
播 "“ 成 果 操 作 ” 和 “学 科 发 展 ”变量 方面 ,不 同年 龄 组 
高 校 科 研 人 员 的 需求 程度 没有 显著 性 差异 。 也 就 是 
说 , 除 “ 研 究 评价 "这 一 Altmetrics 评价 需求 在 不 同年 龄 
组 高 校 科研 人 员 有 一 定 差异 外 ,其 它 6 个 评价 需求 是 
大 家 一 致 认同 的 基本 需求 。 从 具体 数值 来 看 ,在 "研究 
评价 "功能 上 , 随 着 年 龄 的 增长 ,科研 人 员 更 多 追求 的 


可 在 一 定 程度 上 忽略 其 影响 。 

4.2.3 不 同学 科 门 类 高 校 科 研 人 员 Altmetrics 评价 
将 研究 对 象 按 13 个 学 科 门 类 进行 分 类 ,同样 进行 

单 因子 多 变量 方差 分 析 。 通 过 BOX 多 变量 方差 同 质 

性 检验 和 单 因 子 多 变量 显著 性 检验 发 现 检 验 值 均 小 于 

0. 05 ,说 明 不 同学 科 在 7 个 变量 上 的 差异 比较 中 至 少 


是 科研 成 果 本 身 , 对 外 部 评价 并 不 过 于 关注 ,也 一 定 程 | 有 一 个 因 变 量 引 发 显著 差异 ,进一步 进行 单 因子 单 变 
度 上 反映 了 当前 我 国 高 校 成 果 评 价 的 个 人 价值 追求 导 | 量 方差 分 析 ,结果 如 表 12 所 示 : 
el 只 称 评定 ) 。 
> 表 12 不 同学 科 门 类 的 主体 间 效 应 检验 
CN 激 因 变 量 II 型 平方 和 df 均 方 F Sig. 偏 Eta 方 
CO 模型 研究 评价 436.243a 2 218. 121 5.513 .004 .026 
0 成 果 展 示 22 721. 182? 2 11 360. 591 20. 967 .000 .091 
© 需求 发 现 220. 020° 2 110.010 13.277 .000 .059 
< 学 术 认 可 1 273.5404 p> 636.770 14. 803 .000 .066 
交流 传播 166.453° 2 83. 226 3.508 .031 .016 
CN 成 果 操 作 1 266. 450f 2 633. 225 24. 898 .000 . 106 
©O 学 科 发 展 114. 5388 2 57. 269 11.290 .000 .051 
A 截 距 人 研究 评价 282 812. 673 1 282 812. 673 7 148. 365 .000 .944 
> 成 果 展 示 6 047 440. 147 1 6 047 440. 147 11 161.052 .000 .964 
NZ 需求 发 现 66 405. 179 1 66 405. 179 8 014. 600 .000 .950 
(5 学 术 认 可 446 677. 886 1 446 677. 886 10 384. 120 .000 .961 
人 交流 传播 223 366. 666 1 223 366. 666 9 413. 845 .000 .957 
成 果 操 作 192 434. 449 1 192 434. 449 7 566. 483 .000 .947 
© 学 科 发 展 39 718. 661 1 39 718. 661 7 830. 036 .000 .949 
学 科 门 类 研究 评价 436. 243 ) 218. 121 5.513 .004 .026 
成 果 展 示 22 721. 182 2 11 360. 591 20. 967 .000 .091 
需求 发 现 220. 020 2 110.010 13.277 .000 .059 
学 术 认 可 1 273. 540 2 636.770 14. 803 .000 .066 
交流 传播 166. 453 2 83.226 3.508 .031 .016 
成 果 操 作 1 266. 450 2 633. 225 24. 898 .000 .106 
学 科 发 展 114. 538 2 57. 269 11.290 .000 .051 


a. R 方 =.026( 调 整 R 方 =.021)b. R 方 =.091( 调 整 R 方 =.086)c. R 方 =.059( 调 整 R 方 =.055)d. R =.066( 调 整 R 方 = .061)e. 
R 方 =.016( 调 整 R 方 =.012)f. R 方 =.106( 调 整 R 方 =.102)g. R 方 =.051( 调 整 R 方 =.046) 


由 表 12 可 知 ,13 个 学 科 门 类 在 7 个 变量 上 的 单 变 
量 方 差分 析 下 值 分 别 为 5. 513 (p = 0. 004 < 0. 05 ) 、 
20.967(p =0.000 <0.05) 13.277(p =0.000 <0.05) 、 
14. 803(p =0.000 <0.05) .3.508(p =0.002 <0.05) 、 
24.898(p =0.000 <0.05) .11.290(p =0.000 <0.05 ) ， 


是 由 “研究 评价 ”" “成 果 展 示 ”“ 需 求 发 现 ”“ 学 术 认 
可 ”“ 交 流传 播 "“ 成 果 操 作 ” 和 “学 科 发 展 ”"7 个 变量 
0 
把 13 个 学 科 门 类 聚 类 为 自然 科学 .社会 科学 和 人 
文科 学 3 类 ,继续 对 数据 进行 Post Hoc 多 重 比较 检验 ， 


表明 不 同学 科 门 类 多 变量 显著 性 检验 达到 显著 , 主要 


结果 如 表 13 所 示 : 
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表 13 3 个 学 科 类 间 的 多 重 比较 
95% 置信 区 间 


Scheffe 因 变 量 (1) 学 科 门类 (J) 学 科 门 类 ”均值 差 值 (1 -了 ) 标准 误差 Sig. 
下 限 上 限 
研究 评价 自然 科学 社会 科学 —.71 .671 .576 -2.36 .94 
人 文科 学 六 878 .036 11 4.43 
社会 科学 自然 科学 71 671 576 一 .94 2.36 
人 文科 学 2.98* .901 .005 .76 5.19 
人 文科 学 自然 科学 —2.27* 878 .036 一 4.43 —.11 
社会 科学 一 2.98* .901 .005 -5.19 —.76 
成 果 展 示 自然 科学 社会 科学 -3.82 2.485 .307 一 9.93 2.28 
人 文科 学 17.41* 3.248 .000 9.44 25.39 
社会 科学 自然 科学 3.82 2. 485 .307 -2.28 9.93 
人 文科 学 21.24* 3.333 .000 13.05 29.42 
人 文科 学 自然 科学 一 17.41* 3.248 .000 —25.39 一 9.44 
社会 科学 =21 4 3.333 .000 -29.42 —13.05 
本 写 需 求 发 现 自然 科学 社会 科学 .19 .307 . 831 7 .94 
> 人 文科 学 2.01* .402 .000 1.03 3.00 
社会 科学 自然 科学 —.19 .307 .831 一 .94 .57 
© 人 文科 学 1.82* .412 .000 .81 2.84 
© 人 文科 学 自然 科学 —2.01* .402 .000 -3.00 —1.03 
OO 社会 科学 -1.82* .412 .000 -2.84 —.81 
天 术 认可 自然 科学 社会 科学 一 .66 .700 . 642 —2.38 1.06 
OO 人 文科 学 4.30* .915 .000 2.05 6.55 
二 社会 科学 自然 科学 66 700 . 642 —1.06 2.38 
© 人 文科 学 4.96* .939 .000 2.65 7.26 
CN 人 文科 学 自然 科学 —4.30* .915 .000 —6.55 —2.05 
~ 社会 科学 —4.96* .939 .000 -7.26 —2.65 
SE 流传 播 自然 科学 社会 科学 .47 .520 .670 = 1.74 
[a 人 文科 学 1.80* .680 .031 .13 3.47 
CC 社会 科学 自然 科学 —.47 .520 .670 —1.74 .81 
全 人 文科 学 1.33 .697 .162 -.38 3.05 
OO 人 文科 学 自然 科学 —1.80* .680 .031 -3.47 —.13 
社会 科学 -1.33 .697 .162 -3.05 .38 
成 果 操作 自然 科学 社会 科学 一 .53 .538 .614 —1.85 .79 
人 文科 学 4.37* .704 .000 2.64 6.10 
社会 科学 自然 科学 .53 .538 .614 —.79 1.85 
人 文科 学 4.90* .722 .000 3.13 6.67 
人 文科 学 自然 科学 一 4.37* .704 .000 -6.10 —2.64 
社会 科学 —4.90* .722 .000 -6.67 -3.13 
学 科 发 展 自然 科学 社会 科学 .05 .240 .980 一 .54 . 64 
人 文科 学 1.42* .314 .000 .65 2.19 
社会 科学 自然 科学 —.05 .240 .980 —.64 .54 
人 文科 学 J. 37 .322 .000 .58 2.16 
人 文科 学 自然 科学 一 1.42* .314 .000 —2.19 —.65 
社会 科学 Es 7 .322 .000 -2.16 —.58 


从 表 13 可 以 发 现 ,3 个 学 科 类 的 高 校 科 研 人 员 在 | 言 之 , 除 “ 交 流传 播 ” 这 一 Altmetrics 评价 需求 在 不 同学 
“交流 传播 ”变量 上 的 需求 程度 没有 差异 ;在 其 他 6 个 | 科 门 类 间 是 共同 需求 ( 即 所 有 高 校 科 研 人 员 都 希望 自 
变量 中 ,人 文科 学 显著 低 于 自然 科学 和 社会 科学 。 换 | 己 的 研究 成 果 能 够 得 到 最 大 范围 的 交流 传播 ) 外 ,其 它 
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6 个 评价 需求 在 不 同学 科 门 类 间 存 在 显著 差异 ,因而 
以 这 些 评 价 需求 进行 评价 指标 体系 设计 来 进行 高 校 科 
研 人 员 的 Altmetrics 评价 时 ,应 该 区 分 不 同学 科 门 类 间 
的 差异 , 尽 可 能 在 不 同学 科 间 进行 分 别 比较 ;进一步 分 
析 发 现 , 人 文 社 科 门 类 的 需求 程度 普遍 比 社会 科学 门 
类 .自然 科学 门类 要 低 , 自然 科学 与 社会 科学 间 没 有 显 
著 差 异 ,表明 在 社会 科学 门类 自然 科学 门类 的 高 校 科 
人 研 人 员 更 认同 Altmetrics 评价 结果 。 


4.2.4 不 同 身份 高 校 科研 人 员 Altmetrics 评价 的 需 
求 差异 

将 研究 对 象 按 6 种 身份 类 别 进行 分 类 ,同样 进行 
单 因 子 多 变量 方差 分 析 , 通 过 BOX 多 变量 方差 同 质 性 
检验 和 单 因 子 多 变量 显著 性 检验 发 现 检验 值 均 小 于 
0.05 ,说 明 不 同 身份 类 别 在 7 个 变量 上 至 少 有 一 个 因 
变量 引起 显著 差异 ,进一步 进行 主体 间 效 应 检验 分 析 ， 
结果 如 表 14 所 示 : 


表 14 效应 项 的 主体 间 效 应 检验 

源 因 变 量 III 型 平方 和 df 均 方 F Sig. 偏 Eta 方 
校正 模型 研究 评价 1 382. 638。 5 276. 528 7.358 .000 .081 
成 果 展 示 3 619.053? 5 723.811 1.224 .297 .014 
需求 发 现 20.759° 5 4. 152 .471 .798 .006 
学 术 认 可 234.0224 5 46. 804 1.022 .404 .012 
TT 交流 传播 143. 208° 5 28. 642 1. 196 .310 .014 
站 成 果 操作 117. 220f 5 23.444 . 827 .531 .010 
GAN 学 科 发 展 32. 1268 5 6. 425 1.211 .303 .014 
OO RE 研究 评价 91 617.293 1 91 617.293 2 437. 725 .000 . 854 
© 成 果 展 示 2 066 864. 494 1 2 066 864. 494 3 494.738 .000 .893 
需求 发 现 23 555. 130 1 23 555. 130 2 670. 137 .000 . 865 
< 十 学 术 认 可 151 727.737 1 151 727.737 3 312.031 .000 .888 
交流 传播 76 327. 631 76 327. 631 3 186.510 .000 . 884 
CN 成 果 操 作 65 819. 464 1 65 819. 464 2 320. 498 .000 .847 
© 学 科 发 展 13 458. 700 1 13 458. 700 2 536. 426 .000 . 859 
(RR 前 在 校 担任 研究 评价 1 382. 638 5 276. 528 7.358 .000 .081 
~ 的 角色 成 果 展 示 3 619.053 5 723. 811 1.224 .297 .014 
> 需求 发 现 20.759 5 4. 152 .471 .798 .006 
gi 学 术 认可 234. 022 5 46. 804 1.022 .404 .012 
0 交流 传播 143. 208 5 28. 642 1.196 .310 .014 
:3 成 果 操 作 117. 220 5 23. 444 .827 .531 .010 


学 科 发 展 32. 126 5 


sy 


6.425 1.211 .303 .014 


a R 方 -=.081( 调 整 R 方 =.070)b R 方 -=.014( 调 整 R 方 -=.003)c. R 方 =.006( 调 整 R 方 = -.006)d R 方 =.012( 调 整 R 方 =. 


000)e. R 方 =.014( 调 整 R 方 =.002)f. R 方 =.010( 调 整 R 方 = -.002)g. R 方 =.014( 调 整 R 方 =.002) 


从 表 14 可 以 看 到 ,6 个 身份 类 别 的 高 校 科 研 人 员 
在 7 个 变量 上 的 单 变量 方差 分 析 下 值 分别 为 7.353(p 
=0.000 <0.05) .1.224(p =0.297 >0.05) .0.471(p = 
0.798 >0.05) 1.022(p =0.404 >0.05) 1.196(p = 
0.310 >0.05) .0.827(p =0.531 >0.05) 1.211(p = 


高 级 "人员 与 “硕士 研究 生 ”“ 博 士 研究 生 "在 “研究 评 
价 "需求 上 有 差异 ,“ 副 高 级 ”人 员 与 “博士 研究 生 ” 在 
“研究 评价 ”需求 上 有 差异 ,其 他 身份 类 别 高 校 科 研 人 
员 间 没有 达到 显著 性 水 平 。 

数据 分 析 说 明 , 以 “研究 评价 ”"“ 成 果 展 示 ”“ 需 求 


0.303 >0.05) ,表示 不 同 身 份 类 别 的 高 校 科 研 人 员 在 
“研究 评价 "需求 层面 有 显著 性 差异 , 即 多 变量 显著 性 
差异 主要 是 由 “研究 评价 ”变量 引起 ;不 同 身份 类 别 的 
高 校 科 研 人 员 在 “成 果 展 示 ”“ 需 求 发 现 ”“ 学 术 认 可 ” 
“交流 传播 ”“ 成 果 操作 ”“ 学 科 发 展 " 需 求 层面 没有 显 
著 差 异 。 

继续 对 数据 进行 Post Hoc 多 重 比较 检验 , 表 15 是 
“研究 评价 ”需求 的 比较 结果 。 从 数据 可 以 看 出 ,“ 正 


发 现 ”“ 学 术 认 可 ”“ 交 流传 播 "'“ 成 果 操 作 ”“ 学 科 发 
展 ” 等 Altmetrics 评价 需求 的 相应 指标 体系 来 评价 学 术 
成 果 时 , 除 * 研 究 评价 ”结果 需要 适当 区 分 学 生 ( 硕士 
博士 研究 生 ) .教师 间 的 不 同 需求 外 ,其 它 6 类 评价 指 
标 体系 对 所 有 高 校 科 研 人 员 来 说 具有 同样 的 评价 效 
率 。“ 研 究 评价 "需求 方面 表现 出 来 的 差异 ,主要 是 教 
师 与 学 生 在 科研 目标 方面 存在 的 差异 ,尤其 是 对 副 高 
级 职称 人 员 担 任 博士 生 导 师 时 其 表现 可 能 更 加 突出 。 
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表 15 不 同 身份 的 “研究 评价 ”需求 多 重 比较 


95% 置信 区 间 


a (D 您 目前 在 校 担任 的 角色 0) 您 目前 在 校 担任 的 角色 0 

下 限 上 限 

研究 评价 硕士 研究 生 博士 研究 生 -1.76 .799 .433 -4.44 .91 
初级 (助教 ) 一 .04 2.770 1.000 -9.30 9.22 

中 级 (讲师 ,工程 师 ) .29 1.083 1.000 —3.33 3.92 

副 高 级 ( 副教授 , 副 研 究 员 ,高 级 实验 师 ) 3.34 1.071 .085 一 .24 6. 92 

正高 级 (教授 ,研究 员 ) 5.31* 1. 245 .003 1.15 9.47 

博士 研究 生 硕士 研究 生 1.76 .799 .433 —.91 4.44 
初级 (助教 ) 下 了 2. 828 .996 -7.73 11.18 

中 级 (讲师 ,工程 师 ) 2.06 1.224 .726 —2.03 6.15 

副 高 级 ( 副教授 , 副 研 究 员 ,高 级 实验 师 ) 5.11* 1.213 .004 1.05 9.16 
二 正高 级 (教授 ,研究 员 ) 7.07* 1.369 .000 2.49 11. 65 
LO 初级 (助教 ) 硕士 研究 生 .04 2.770 1.000 -9.22 9.30 
博士 研究 生 -1.72 2.828 .996 -11.18 7.73 
©O 中 级 (讲师 ,工程 师 ) .34 2.921 1.000 一 9.43 10. 10 
= 副 高 级 ( 副教授 , 副 研 究 员 ,高 级 实验 师 ) 3.38 2.916 .930 一 6.37 13. 13 
正高 级 (教授 ,研究 员 ) 5.35 2. 985 . 668 一 4.63 15.33 
这 中 级 (讲师 ,工程 师 ) 硕士 研究 生 —.29 1.083 1.000 一 3.92 3.33 
©O 博士 研究 生 -2.06 1.224 .726 -6.15 2. 03 
A 初级 (助教 ) 一 .34 2.921 1.000 -10.10 9.43 
之 副 高 级 ( 副教授, 副 研究 员 ,高 级 实验 师 ) 3. 05 1.416 .463 —1.68 7.78 
正高 级 (教授 ,研究 员 ) 5.01 1.552 .066 eg 10.20 
人 副 高 级 (副教授 , 副 研究 员 ,高 级 实验 师 ) 硕士 研究 生 -3.34 1.071 .085 -6.92 .24 

mm 

,全 博士 研究 生 5 “L193 .004 -9.16 -1.05 
© 初级 ( 助教) -3.38 2.916 .930 -13.13 6.37 
中 级 (讲师 ,工程 师 ) —3.05 1.416 .463 一 7.78 1.68 

正高 级 (教授 ,研究 员 ) 1.96 1. 543 . 899 -3.19 7:12 
正高 级 (教授 ,研究 员 ) 硕士 研究 生 -5.31* 1.245 .003 一 9.47 -1.15 
博士 研究 生 -7.07* 1.369 .000 -11.65 -2.49 

初级 (助教 ) —5.35 2. 985 .668 -15.33 4. 63 

中 级 (讲师 ,工程 师 ) —5.01 1.552 .066 -10.20 .17 

副 高 级 ( 副教授 , 副 研 究 员 ,高 级 实验 师 ) —1.96 1. 543 . 899 7 好 3.19 

5 ”结语 需求 ,分 别 是 :研究 评价 ,成 果 展 示 , 需 求 发 现 ,学 术 认 


方 实际 需 习 


数据 分 析 共 识 另 


本 文选 择 高 校 科研 人 员 为 研究 对 象 , 从 利益 相关 
出 发 ,采用 质 性 与 量化 相 结合 的 方法 识别 
我 国 高 校 科 研 人 员 的 Altmetrics 评价 需求 。 基 于 质 性 
4 出 高 校 科研 人 员 7 类 Altmetrics 评价 


可 ,交流 传播 ,成果 操 作 ， 


学 科 发 展 ; 进 


一 步 , 从 量化 分 


析 证 明 这 些 识别 出 的 评价 需求 是 否 具有 差异 性 和 普遍 


性 。 
从 年 龄 


组 别 上 看 ,在 “成 果 展 示 ”“ 需 求 发 现 ” “学 


流传 播 "“ 成 果 操 作 ” 和 “学 科 发 展 ”"6 个 
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沈 兰 妮 ， 韩 级. 我国 高 校 科 研 人 员 Altmetrics 评价 需求 差异 研究 []]. 图 书 情 报 工 作 ,2020 ,64(23 ) :40 - 52. 


Altmetrics 评价 需求 方面 不 同年 龄 组 别 高 校 科研 人 员 
没有 差异 ;在 “研究 评价 ”评价 需求 方面 “51 -60 岁 ” 
EF 龄 组 较 其 他 年 龄 组 的 评价 需求 显著 性 偏 低 。 

从 学 科 类 别 来 看 ,高 校 科研 人 员 在 “交流 传播 " 评 
价 需求 上 没有 差异 ,其 他 6 个 评价 需求 上 人 文科 学 显 
著 低 于 自然 科学 和 社会 科学 且 自 然 科学 与 社会 间 没有 
显著 差异 ,表明 在 社会 科学 门类 ,自然 科学 门类 的 高 校 
科研 人 员 更 认同 Altmetrics 评价 结果 。 

从 人 员 身份 视角 来 看 ,不 同 身份 类 别 的 高 校 科研 
人 员 在 “成 果 展示 ” “需求 发 现 ”“ 学 术 认可 ”“ 交 流传 
播 "“ 成 果 操作 ”“ 学 科 发 展 " 评 价 需求 上 没有 显著 差 
异 ;“ 研 究 评 价 ” 主 要 体现 在 学 生 (硕士 博士 研究 生 ) 与 
教师 间 的 评价 需求 差异 。 

二 因此 ,本 研究 所 识别 出 的 高 校 科 研 人 员 Altmetrics 
评 佛 需求 具有 较 强 的 普遍 性 ,进一步 可 推断 出 基于 这 
此 计价 功能 需求 开发 相应 的 评价 指标 体系 能 够 在 一 定 
入 昌 上 解决 非 正式 交流 强劲 回归 所 带 来 的 评价 现实 需 
求 :中 是 在 实践 中 需要 注意 人 文学 科 的 需求 差异 教师 
与 第 生 在 “研究 评价 ”功能 上 的 不 同 。 

人 本文 从 高 校 科研 人 员 入 手 尝试 解决 利益 相关 方 的 
Alimptrics 评价 需求 ,对 于 新 形势 下 学 术 生 态 环境 优化 
其 神 一 定 的 理论 与 实践 价值 ,未 来 需要 进一步 识别 其 
他 美 别 利益 相关 方 的 评价 功能 需求 ,基于 典型 利益 相 
黎 庆 的 Altmetrics 功能 需求 公约 数 探寻 中 文学 术 成 果 
评 侈 的 完善 指标 体系 ,为 科研 评价 创新 寻求 优化 路 径 


a 


与 放 法 。 
参考 文献 : 


[ 1 ] 王 贤 文 . Altmetics: 大 数据 时 代 的 科学 计量 学 [中 .图 书 情报 知 
识 ,2019(2 ) :4. 

[ 2 ] 韩 妆 . 非 正式 交流 回归 语 境 下 科技 评价 的 融合 路 径 取 向 [可 

中 国 图 书馆 学 报 ,2016 ,42(4) : 64 -74. 

[ 3 ] 清理 “ 唯 论 文 、 唯 职称 、 唯 学 历 、 唯 奖项 "专项 行动 开展 [ EB/ 
OL]. [2020 - 06 -27]. http://www. chinanews. com/gn/2018/ 
10 -24/8657958. shtml. 

[ 4 ] 韩 毅 . 中 文学 术 成 果 评 价 的 Altmetrics 发 展 及 实践 路 径 [J]. 西 
华 大 学 学 报 ( 哲 学 社会 科学 版 ), 2018 ,37(1) :81 - 86. 

[5 ] MALONE T，BURKE S$. Academic librarians? knowledge of bib- 


全 


liometrics and Altmetrics[ J ]. Evidence based library and informa- 
tion practice, 2016，11(3 ) :34. 

[ 6 ] REED K, MCFARLAND D, CROFT R. Laying the groundwork for 
a new library service: scholar - practitioner & graduate student atti- 


tudes toward altmetrics and the curation of online profiles[ j]. Evi- 


dence based library & information practice ,2016 ,11(2 ) :87. 
[7 


[i 


HOLMBERG K, VAINIO J. Why do some research articles receive 
more online attention and higher altmetrics? reasons for online suc- 
cess according to the authors[ J]. Scientometrics,2018, 116(3): 
435 —447. 

[8 


LD 


CHEN K H, TANG M C, WANG C M, et al. Exploring alternative 
metrics of scholarly performance in the social sciences and humani- 
ties in Taiwan[ J]. Scientometrics, 2015, 102(1) :97 - 112. 

[9 


L_ 


BHARDWAJ R K. Academic social networking sites: comparative 

analysis of ResearchGate, Academia. edu, Mendeley and Zotero 

[J]. Information and learning sciences, 2017,118 (5/6): 298 — 

316. 

[10] KWOK R. Research impact: Altmetrics make their mark [J ]. Na- 
ture ,2013 ,500(7463 ) :491 - 493. 

[11] BIK H. Researchers who have used Altmetrics for tenure & grants 
[ EB/OL]. [2020 - 05 -23]. http: //blog. impactstory. org / 
right - metrics — generation - open — post. 

[12] MOJISOLA E,HTET A H, SARA A A,et al. Analysing research- 
ers ”outreach efforts and the association with publication metrics: a 
case study of kudo{[ EB/OL ]. [2020 - 05 — 17]. https://jour- 
nals. plos. org/plosone/article? id = 10. 1371/journal. pone. 
0183217. 

[13] NICHOLAS D,HERMAN E,XU J,et al. Early career researchers’ 
duest for reputation in the digital age[ J ]. Journal of scholarly pub- 
lishing ,2018 ,49(4) :375 -396. 

[14] YURI G A,BEKAIDAR N,MARLEN Y,et al. Researcher and au- 
thor profiles : opportunities, advantages, and limitations[ J ]. Jour- 
nal of Korean medical science,2017 ,32(11) :1749 -1756. 

[15 ] 徐 曼 . 出 版 行业 对 大 数据 的 应 用 思路 探析 [中 .出 版 广角 ,2017 

(17) :45 -47. 

116] 杜 秀 杰 , 葛 赵 青 , 卓 选 胶 ,等 . 数字 出 版 时 代 学 术 论文 的 互动 训 

价 探索 [中 .编辑 学 报 ,2014, 26(1) :10 - 12. 

[17] NISO RP -25 -2016 Outputs of the NISO Alternative assessment 


尽 


metrics project[ R/OL]. [2020 - 05 -17]. https://www. niso. 


org/ publications/rp -25 -2016 - altmetrics. 
[18] 沈 兰 妮 , 刘 艳 笑 , 丁 文 姚 ,等 . 非 正式 交流 回归 视角 下 Altmetrics 


评价 的 利益 相关 者 识别 研究 [J]. 图 书 与 情报 ,2018(5 ) :22 - 
28 . 

[19] 陈 向 明 . 扎根 理论 的 思路 和 方法 [J]. 教育 研究 与 实验 ,1999 
(4) :58 -63. 

作者 贡献 说 明 : 


沈 兰 妮 :数据 搜集 、 整 理 与 分 析 , 撰 写 论文 初稿 ; 
韩 必 :整体 研究 设计 与 规划 ,论文 修改 完善 。 


51 


略语 情 骤 三 作 Chinaxi 


第 64 卷 第 23 期 2020 年 12 月 


Needs and Its Differences Studies on Altmetrics Evaluation 
for University Researchers in China Mainland 
Shen Lanni Han Yi 
College of Computer and Information Science ,Southwest University ,Chongqing 400715 
Absiract: | Purpose/significance | With the deepening of research on Altmetrics, it is of great significance to 
effectively identify the needs of stakeholders in Altmetrics evaluation ,which is useful to design the evaluation indica- 
tors and construct the data infrastructure. | Method/ process | Taking researchers of universities in China mainland 
as the sampling, this paper used the semi - structured interview to identify the Altmetrics evaluation needs for Univer- 
sity researchers in China mainland, and used questionnaire to explore the differences of the identified Altmetrics eval- 
uation needs for University researchers. | Result/conclusion | Tt is found that there are seven Altmetrics evaluation 
needs for University researchers in China mainland, which are research evaluation, achievement display, needs dis- 
covery , academic recognition, communication and dissemination, achievement operation and discipline development. 


ere are need differences in “research evaluation” for University researchers among different age groups, in which 


Wl 


Lf “research evaluation” needs in 51 - 60 age groups are clearly lower than the other age groups. Except for “com- 


2 


Cmynication , the other six Altmetrics evaluation needs in humanities are lower than the social and natural subjects ， 
(Gand the evaluation needs in social and natural subjects are equal. Except for the needs differences between teachers 
and students in “ research evaluation” , the other six Altmetrics evaluation needs are not different in all other different 
Staius categories of University researchers. The results show that 7 Altmetrics evaluation needs have high universal 
licability. 
© Keywords: University in China mainland researchers academic achievements Altmetrics evaluation needs 


CNneeds differences 


~ ~~—~—~—~—~—~~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~—~~ 


《图 书 情报 工作 》 投 稿 作者 学 术 诚 信 声 明 


1 

: 《图 书 情报 工作 》 一 直 乘 持 发 表 优秀 学 术 论文 成 果 促进 业界 学 术 交 流 的 使 命 ,并 致力 于 净化 学 术 出 版 环境 , 创 
: 建 良好 学 术 生 态 。2013 年 牵头 制订 发布 并 开始 执行 《图 书馆 学 期 刊 关于 恪守 学 术 道 德 净化 学 术 环 境 的 联合 声明 》 
; (简称 《声明 》)( 见 :http:AAwww. lis. ac. cn/CN/column/item202. shtml) ,随后 又 牵头 制订 并 发 布 《中 国 图 书馆 学 情报 
: 学 期 刊 抵制 学 术 不 端 联合 行动 计划 》( 简称 《联合 行动 计划 》) ( 见 : http://www. lis. ac. en/CN/column/item247. sht- 
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ml) 。 为 贯彻 和 落实 这 一 理念 ,本 刊 郑重 声明 ,即日 起 ,所 有 投稿 作者 须 承诺 :投稿 本 刊 的 论文 , 须 遵 守 以 上 《声明 》 
及 《联合 行动 计划 》, 自觉 坚守 学 术 道德 ,坚决 抵制 学 术 不 端 。《 图 书 情报 工作 》 对 一 切 涉嫌 抄袭 、 璋 窃 等 各 种 学 术 不 
端 行为 的 论文 实行 零 容 忍 ,并 采取 相应 的 惩戒 手段 。 
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